Seedance 2.0 Omni 뮤직비디오 제작 워크플로우 단계별 실습

📅 2026-07-07 10:52 · obsidian-share

type: note

status: active-practice

source_type: user-provided-workflow

knowledge-candidate: true

created: 2026-07-01

topics:

- Seedance 2.0

- AI 뮤직비디오

- Omni reference

- Suno

- CapCut

- lip-sync

keywords:

- Seedance Omni

- Suno 5.5

- blank audio video

- video reference

- lipsync

- video-to-video

- B-roll

- CapCut editing

related_skills:

- seedance-omni-music-video-workflow

- seedance-continuation-playbook

- seedance-audio

- seedance-reference-placement

# Seedance 2.0 Omni 뮤직비디오 제작 워크플로우 - 단계별 실습

한 줄 요약

Suno로 만든 노래를 CapCut에서 오디오가 들어간 빈 영상으로 내보낸 뒤, Seedance 2.0 Omni에 시작 이미지 + 오디오 영상 레퍼런스로 넣어 립싱크 뮤직비디오를 만들고, 생성된 영상을 V2V로 이어가며 CapCut에서 최종 편집하는 워크플로우.

왜 저장했나

이 워크플로우는 단순한 “영상 생성”이 아니라, 노래 제작 → 이미지 기준점 → 오디오 레퍼런스 → 립싱크 생성 → 연속 장면 확장 → 편집 완성까지 이어지는 실전형 AI 뮤직비디오 제작 절차다. 반복해서 써먹을 수 있으므로 Hermes 스킬 seedance-omni-music-video-workflow로도 저장했다.

핵심 아이디어

  • Seedance에 노래를 바로 설명하는 것보다, CapCut에서 오디오가 들어간 빈 영상을 만들어 Omni의 영상/오디오 레퍼런스로 넣는 것이 핵심이다.
  • 시작 이미지는 캐릭터, 의상, 분위기, 배경을 고정한다.
  • 오디오 영상 레퍼런스는 박자, 보컬 타이밍, 립싱크 기준을 제공한다.
  • 생성된 영상이 마음에 들면, 그 영상을 다시 V2V 레퍼런스로 넣고 The scene continues로 다음 장면을 이어간다.
  • 최종 퀄리티는 Seedance 한 방 결과보다 CapCut에서의 컷 선택, 박자 편집, B-roll 배치가 결정한다.

    • 전체 제작 흐름

    1단계. 노래 만들기

  • Suno 5.5 또는 원하는 음악 생성 툴에서 곡을 만든다.
  • 필요한 결과물:

    • - 최종 오디오 파일

    - 전체 가사

    - 후렴/벌스/브릿지 구간

    - 20~30초 테스트 구간

    #### 체크

  • [ ] 가사가 확정됐는가?
  • [ ] 첫 테스트에 쓸 20~30초 구간을 골랐는가?
  • [ ] 립싱크가 필요한 가사 줄을 짧게 나눴는가?

    • 2단계. 시작 이미지 만들기

  • Grok Imagine, Nano Banana Pro, Midjourney, Flux 등으로 시작 이미지를 만든다.
  • 목표는 예쁜 한 장이 아니라, Seedance가 계속 붙잡을 수 있는 비주얼 기준점이다.

    • #### 시작 이미지에 고정할 것

  • 주인공 얼굴과 헤어
  • 의상
  • 배경/장소
  • 색감
  • 카메라 거리
  • 9:16 세로 구도

    • #### 체크

  • [ ] 주인공 얼굴이 명확한가?
  • [ ] 의상과 배경이 뮤직비디오 전체 콘셉트와 맞는가?
  • [ ] 모바일 화면에서 보기 좋은 9:16 구도인가?

    • 3단계. CapCut에서 오디오가 들어간 빈 영상 만들기

    1. CapCut 새 프로젝트를 만든다.

    2. 완성된 음악 파일을 불러온다.

    3. 검정 화면, 단색 화면, 빈 화면 등 간단한 영상 레이어를 깐다.

    4. 음악이 들어간 상태로 영상 파일을 내보낸다.

    이 파일은 최종 결과물이 아니라 Seedance에 넣을 오디오/리듬 레퍼런스 영상이다.

    #### 체크

  • [ ] 영상 파일 안에 오디오가 정상적으로 들어갔는가?
  • [ ] Seedance에 업로드 가능한 길이/용량인가?
  • [ ] 테스트 구간만 잘라서 만든 버전도 있는가?

    • 4단계. Seedance 2.0 Omni 첫 클립 생성

    Seedance Omni에 다음 2개를 업로드한다.

  • 이미지 레퍼런스: 시작 이미지
  • 영상/오디오 레퍼런스: CapCut에서 만든 빈 오디오 영상

    • #### 첫 클립 프롬프트 템플릿

    Reference Map
- Image Ref 1: singer identity, outfit, location, color palette
- Video Ref 1: song audio and rhythm reference for lip-sync

Prompt
Use Image Ref 1 as the visual identity and starting frame. Use Video Ref 1 only for the song rhythm, vocal timing, and lip-sync reference. The singer performs this lyric segment: "[여기에 현재 가사 한 줄]". The singer clearly sings along to the song with restrained mouth and body movement that matches the vocal timing. Scene action: [장면 행동]. Camera: [카메라 움직임 또는 2~3개의 숏 변화]. Mood: [감정]. Keep the same face, outfit, lighting, and location. No subtitles, no logo, no watermark, no added background music, no extra sound effects.

    #### 체크

  • [ ] 프롬프트에 실제 가사 한 줄을 넣었는가?
  • [ ] 가사 구간이 너무 길지 않은가?
  • [ ] 카메라 지시가 너무 복잡하지 않은가?
  • [ ] BGM/SFX를 새로 만들지 말라고 명시했는가?

    • 5단계. 결과 평가

    첫 결과는 “완성본”이 아니라 편집 재료로 판단한다.

    #### 평가 기준

  • 립싱크가 대략 맞는가?
  • 얼굴이 유지되는가?
  • 의상과 장소가 유지되는가?
  • 박자에 맞게 움직이는가?
  • 최종 편집에서 쓸 수 있는 컷이 3~5초라도 있는가?

    • #### 판정

  • keep: 메인 컷으로 사용
  • retry: 프롬프트 수정 후 재생성
  • B-roll only: 립싱크는 약하지만 분위기 컷으로 사용
  • discard: 버림

    • 6단계. V2V로 장면 이어가기

    마음에 드는 클립이 나오면 그 영상을 다시 Seedance에 넣는다.

    권장 레퍼런스:

  • 이전 생성 영상
  • 가능하면 이전 영상의 마지막 프레임
  • 원래 CapCut 빈 오디오 영상

    • #### 이어가기 프롬프트 템플릿

    Reference Map
- Video Ref 1: previous generated clip for visual continuity
- Image Ref 1: previous clip's last frame as the exact continuation anchor, if available
- Video Ref 2: blank audio video containing the song, for rhythm and lip-sync reference

Prompt
The scene continues from the previous clip. Use the last frame as the starting state and preserve the same singer, outfit, lighting, and location. The singer continues performing this lyric segment: "[다음 가사 한 줄]". Change only one main thing: [새 행동 또는 카메라 변화]. Camera: [하나의 주요 카메라 움직임]. Keep motion simple enough for lip-sync. No subtitles, no logo, no watermark, no added background music, no extra sound effects.

    #### 이어가기 규칙

  • 한 클립에서는 한 가지만 바꾼다.
  • 의상, 얼굴, 배경을 갑자기 바꾸지 않는다.
  • 정확한 음악 연결은 Seedance에 맡기지 말고 CapCut 최종 오디오로 맞춘다.
  • 생성 영상의 오디오는 필요하면 음소거하고, 최종 음악 트랙 하나를 기준으로 편집한다.

    • 7단계. CapCut에서 최종 편집

    가장 어려운 단계다. 좋은 뮤직비디오는 생성보다 편집에서 완성된다.

    #### 편집 순서

    1. 최종 음악 파일을 마스터 오디오로 깐다.

    2. Seedance 결과물을 음악 박자에 맞춰 배치한다.

    3. 립싱크가 좋은 컷은 보컬 라인에 쓴다.

    4. 립싱크가 약한 컷은 B-roll, 반응 컷, 분위기 컷으로 쓴다.

    5. 후렴에는 가장 강한 클로즈업/퍼포먼스 컷을 배치한다.

    6. 어색한 부분은 빠른 컷, 크롭, 전환, 오버레이로 숨긴다.

    7. 모바일에서 먼저 확인한다.

    #### 체크

  • [ ] 마스터 오디오는 하나로 유지했는가?
  • [ ] 립싱크 좋은 부분을 보컬 라인에 배치했는가?
  • [ ] B-roll이 리듬을 살리는가?
  • [ ] 모바일 9:16에서 주인공이 잘 보이는가?

    • 초보자용 1회차 실습 미션

    목표: 20~30초짜리 미니 뮤직비디오 테스트 만들기

    미션 순서

    1. Suno에서 20~30초짜리 후렴 구간을 만든다.

    2. 가사 2~4줄만 골라 타임라인을 만든다.

    3. 주인공 이미지 1장을 만든다.

    4. CapCut에서 오디오가 들어간 빈 영상을 만든다.

    5. Seedance Omni에 이미지 + 빈 오디오 영상을 넣는다.

    6. 첫 가사 줄로 첫 클립을 만든다.

    7. 좋은 결과를 고른다.

    8. The scene continues로 1개만 이어 만든다.

    9. CapCut에서 두 클립을 붙여 모바일로 본다.

    1회차 성공 기준

  • [ ] 3초 이상 쓸 만한 립싱크 컷이 있다.
  • [ ] 인물이 같은 사람처럼 유지된다.
  • [ ] 음악 박자와 컷 전환이 대략 맞는다.
  • [ ] 모바일에서 보기 좋다.

    • 클립별 작업 시트

    ### Clip [번호]
- Song timestamp:
- Lyrics:
- Clip role: intro / verse / hook / B-roll / bridge / ending
- Visual reference:
- Audio/video reference:
- Main action:
- Camera:
- Emotion:
- Must preserve:
- End state for next clip:
- Seedance prompt:
- Result verdict: keep / retry / B-roll only / discard
- Edit note:

    자주 망가지는 부분과 해결법

    립싱크가 안 맞음

  • 가사 구간을 더 짧게 자른다.
  • 프롬프트에 실제 가사를 그대로 넣는다.
  • 몸동작을 줄이고 얼굴/상반신 중심으로 만든다.
  • 빈 오디오 영상을 다시 레퍼런스로 넣는다.

    • 인물이 바뀜

  • 시작 이미지 또는 마지막 프레임을 다시 레퍼런스로 넣는다.
  • 새 의상/새 헤어 묘사를 추가하지 않는다.
  • 이전 생성 영상을 V2V 레퍼런스로 넣는다.

    • 장면이 리셋됨

  • The scene continues from the previous clip.로 시작한다.
  • 마지막 프레임을 시작점으로 쓴다.
  • 한 클립에서 한 가지 행동만 바꾼다.

    • 편집이 지루함

  • 손, 조명, 걷기, 실루엣, 배경 반응 같은 B-roll을 추가 생성한다.
  • 후렴에는 클로즈업과 강한 퍼포먼스 컷을 쓴다.
  • 컷 길이를 음악 박자에 맞춘다.

    • AI가 이 노트로 답할 수 있는 질문

  • Seedance 2.0 Omni로 Suno 노래 뮤직비디오를 만드는 순서는?
  • CapCut에서 왜 오디오가 들어간 빈 영상을 만들어야 하나?
  • Seedance 립싱크 정확도를 높이려면 프롬프트에 무엇을 넣어야 하나?
  • 생성된 Seedance 영상을 다음 장면으로 자연스럽게 이어가는 방법은?
  • CapCut에서 Seedance 결과물을 어떻게 편집해야 뮤직비디오처럼 보이나?

    • 관련 노트

  • [[Seedance 2.0]]
  • [[AI 영상 제작 워크플로우]]
  • [[CapCut 편집]]
  • [[Suno 음악 생성]]

    • Knowledge Candidate 판단

    true — 반복 가능한 제작 절차, 프롬프트 템플릿, 편집 기준, 오류 해결법이 모두 들어 있어 Wiki Vault로 승격 가치가 높다.

    원문 메모

    사용자가 공유한 HONEY 제작 워크플로우 요지:

    1. Suno 5.5로 노래를 쓰고 음악을 생성한다.

    2. Grok Imagine, Nano Banana Pro 등으로 이미지 레퍼런스를 만든다.

    3. CapCut에 오디오를 넣고, 오디오가 포함된 빈 영상을 내보낸다.

    4. Seedance 2.0 Omni에 시작 이미지와 오디오가 담긴 영상 레퍼런스를 넣는다.

    5. 장면 내용, 멀티샷, 카메라 앵글 변화, 노래를 부르는 동작, 해당 가사를 프롬프트에 적는다.

    6. 마음에 드는 결과가 나오면 그 영상을 V2V로 다시 넣고 The scene continues로 다음 행동을 이어간다.

    7. 마지막으로 CapCut에서 박자, 컷 선택, 장면 배열을 전략적으로 편집한다.